Năm thứ 265 TCN, Tần Chiêu Tương vương lập cha ông là An Quốc quân Doanh Trụ làm thái tử kế tục con trưởng đã mất.

Do mẹ ông là Hạ Cơ không được thái tử yêu nên Dị Nhân phải làm con tin của Tần ở nước Triệu. Năm 260 TCN, 45 vạn quân Triệu bị tướng Bạch Khởi của Tần thảm sát trong trận Trường Bình, nên Dị Nhân bị ngược đãi, phải ra sống ở Tùng Đài trong cảnh khốn khổ.

Lã Bất Vi, một thương nhân có tiếng lúc đó đang buôn bán ở Hàm Đan trông thấy Dị Nhân và có ý định giúp ông làm thái tử nước Tần, mưu dựa vào Dị Nhân để mình cũng được thành danh.

Lã Bất Vi đưa cho Dị Nhân năm trăm cân vàng tiêu dùng và đãi tân khách, rồi lấy tiền mua của báu vật lạ, đem sang Tần, xin ra mắt người chị của Hoa Dương phu nhân để dâng những vật ấy cho Hoa Dương Phu nhân. Nhân đó, Lã Bất Vi kể Dị Nhân tài giỏi, khôn ngoan, giao hảo với người các nước, bạn hữu khắp thiên hạ. Hoa Dương phu nhân không có con, Bất Vi khuyên nhận Dị Nhân làm con nuôi. Hoa Dương phu nhân nghe theo, vào xin An Quốc Quân lập Dị Nhân làm thừa tự. An Quốc Quân nghe theo, cùng phu nhân cho Dị Nhân nhiều của cải và xin Bất Vi giúp đỡ cho. Danh tiếng Dị Nhân từ đó càng nổi với chư hầu. Bất Vi có một người thiếp là Triệu Cơ, một mỹ nữ nước Triệu có tài đàn hay múa giỏi. Bất Vi mời Dị Nhân đến nhà, sai Triệu Cơ ra rót rượu. Dị Nhân đem lòng say mê, Lã Bất Vi liền dâng Triệu Cơ cho Dị Nhân. Dị Nhân lập Triệu Cơ làm phu nhân, Triệu Cơ đến đủ tháng sinh con cho Dị Nhân, đặt tên là Chính.